Towards Reliable, Scalable, and Value-Aligned Generative Recommendation for Large-Scale Advertising
面向大规模广告的可靠可扩展价值对齐生成式推荐系统
🧭 生成式推荐 · Semantic ID · 价值对齐 ★ 深度解读
Kuaishou Technology
通过多路径SID、五维容量扩展和统一价值引导生成与判别，快手广告生成式推荐实现3.07%收入提升
📌 工作参考价值（4 点）
- Multi-Path SID：对 embedding 聚类边界模糊的物品保留 top-m 条第一层路径，避免单路径 SID 被 beam search 剪枝后完全不可达。电商/广告场景中物品语义边界普遍模糊，可低成本提升召回覆盖，且不增加解码深度。
- PCGM 词汇记忆扩展：用 prefix 条件门控记忆表代替稠密 FFN 门控，按前缀长度检索不同粒度的 SID 嵌入，垂直方向层独立，水平方向支持 1/2/3-gram。在不增加每次解码稠密计算的前提下大幅提升参数容量，适合在线延迟敏感系统。
- Diagonal Hyper-Connections：多流残差 + 对角门控，每个子层只计算一次注意力/FFN，却可以扩展多条信息通路。相比直接加宽或加深 Transformer，在相同吞吐下获得更好表示能力，可复用于推荐模型的序列编码器。
- Prefix-level value + PV-BeamSearch：将序列级奖励自底向上聚合为前缀价值，训练轻量级 per-level 价值头，推理时用 RRF 融合生成概率排名和价值排名，从 level≥2 开始干预。有效解决高价值 prefix 被过早剪枝的问题，且无需外部重排模型。